Interpretable Representation via LLM-Driven Generative Disentanglement for Local-Life Service Recommendation
LLM驱动生成式解耦:本地生活服务可解释SID生成
🧭 生成式推荐 · Semantic ID ★ 深度解读
Kuaishou Technology
提出先解耦后量化的SID生成框架,将LLM纠缠隐状态分离为地理与语义槽再分别量化,大幅降低SID冲突并提升推荐效果
📌 工作参考价值(4 点)
- 电商/本地推荐中的SID冲突解决:本地生活或电商场景中,地理、品牌、类目常纠缠在同一隐空间,导致量化后SID高频碰撞。可借鉴LGRID的生成式解耦思路,在LLM编码后加入结构化解耦块,将地理层级和语义属性显式分离后再分别量化,显著降低冲突率(从97%降至39.9%)。
- 属性可解释性训练:通过课程式属性解码(coarse-to-fine)和结构感知对比学习,可以利用少量监督让LLM隐状态具有显式的属性语义,实现高精度的粗/细粒度地理解码(>99%),这种可解释表征可直接用于冷启动物品画像或可解释推荐标题生成。
- 双流残差量化的多属性扩展:DSRQ对地理和语义槽使用独立码本,避免码本竞争,同时保持粗到细的层次结构。当业务存在多类异构属性(如价格段、适用人群)时,可复用该双流思路,每个属性流独立量化,再拼接成统一SID。
- 工业部署友好:离线SID构建仅增加约1.56倍时间,在线延迟几乎不变(1.04倍),仅需查表获取预生成SID并与原ID嵌入拼接,不改变推荐模型结构,适合大规模工业系统直接嵌入。